AI-PAVE-Br: Leveraging Large Language Models for Enhanced Product Attribute Value Extraction through a Golden Set Approach
巴西电商产品属性值提取:基于LLM与黄金标注集的方法
🧭 LLM赋能属性提取 · 巴西电商 ★ 深度解读
LuizaLabs · Mackenzie Presbyterian University · University of São Paulo
用精心设计提示词的LLM代替传统NER,在巴西葡语商品属性提取上F1提升约15个百分点
📌 工作参考价值(5 点)
- 用LLM+提示工程直接做商品属性提取:无需微调,为每个品类定制提示词(任务说明、上下文、输出JSON格式、few-shot示例),可快速替换传统NER,特别适合多品类、多语种电商快速迭代。
- 构建黄金标注集的方法论:使用Cochran公式确定每类产品的样本量(95%置信度、5%误差,约385条),20个品类共覆盖数十万产品,可作为评估模型质量的无偏基准,也适合作为业务内部模型评测的固定验证集。
- 结构化输出设计:提示词中明确要求JSON输出,下游可直接解析入属性库、供搜索/推荐使用;对电压、尺寸等多值或歧义属性,提示词中需提供具体格式和示例,可大幅减少后处理。
- 工程部署考量:文中对比了自托管开源模型(VM部署,可预见延迟和成本)与闭源API(Gemini 2.5 Flash-Lite,1000并发请求平均1.3s但偶发30s)。推荐高吞吐场景优先自托管,避免API延迟波动和rate limit。
- 属性标准化仍是痛点:同一属性存在多种写法(“bivolt”“110/220V”),LLM虽能提取但一致性不足,建议后续增加规则或正则规范化层,或对LLM施加更严格的输出格式约束。